Evaluación de Sistemas de Búsqueda de Respuestas con restricción de tiempo
نویسندگان
چکیده
Previous works on evaluating the performance of Question Answering (QA) systems are focused in the evaluation of the precision. Nevertheless, the importance of the answer time never has been evaluated. In this paper, we developed a mathematic procedure in order to explore new evaluation measures in QA systems considering the answer time. Also, we carried out an exercise for the evaluation of QA systems within a time constraint in the CLEF-2006 campaign, using the proposed measures. The main conclusion is that the evaluation of QA systems in realtime can be a new scenario for the evaluation of QA systems.
منابع مشابه
Arquitectura multilinge de sistemas de búsqueda de respuestas basada en ILI y Wikipedia
Arquitectura multilingüe de sistemas de búsqueda de respuestas basada en ILI y Wikipedia
متن کاملPredicción de Múltiples Puntos de Series de Tiempo Utilizando Support Vector Machines
Se presenta la evaluación de la predicción de múltiples puntos de series de tiempo, mediante un corrimiento de ventana para Support Vector Machines (SVM) con dos funciones de kernel distintas (lineal y con base radial). Para la evaluación se utilizó un conjunto de treinta series de diferente origen y comportamiento dinámico. Se encuentra que la SVM posee una buena capacidad para ajustarse a las...
متن کاملAcute Effects of Restraint, Shock and Training in the Elevated T-maze on Noradrenaline and Serotonin Systems of the Prefrontal Cortex
La corteza prefrontal (CPF) participa en las funciones cognitivas y la regulación del estrés. Las concentraciones de noradrenalina (NA) y serotonina (5-HT) en algunas regiones en el sistema nervioso central son modificadas por el estrés agudo. El efecto depende del estresor y del tiempo que transcurra entre el estresor y la evaluación. El objetivo del presente estudio fue evaluar el efecto agud...
متن کاملLa Búsqueda de Respuestas: Estado Actual y Perspectivas de Futuro
The increasing demand of systems that respond in a precise way users information needs has fostered a new investigation eld: Question A nswering (QA). The objective of this investigation goes beyond the retrieval of relevan t documents carried out by traditional Information R etrieval systems (IR). QA systems tackle the problem of locating, extracting and presenting to the user just only the re...
متن کاملذخیره در منابع من
با ذخیره ی این منبع در منابع من، دسترسی به آن را برای استفاده های بعدی آسان تر کنید
برای دانلود متن کامل این مقاله و بیش از 32 میلیون مقاله دیگر ابتدا ثبت نام کنید
ثبت ناماگر عضو سایت هستید لطفا وارد حساب کاربری خود شوید
ورودعنوان ژورنال:
- Procesamiento del Lenguaje Natural
دوره 39 شماره
صفحات -
تاریخ انتشار 2007